Impact de l'information visuelle pour la Recherche d'Images par le contenu et le contexte

RÉSUMÉ. Les documents multimédia composés de texte et d’images sont de plus en plus présents grâce à Internet et à l’augmentation des capacités de stockage. Cet article présente un modèle de représentation de documents multimédia qui combine l’information textuelle et l’information visuelle. En utilisant une approche par sac de mot, un document composé de texte et d’image peut être décrit par des vecteurs correspondant à chaque type d’information. Pour une requête multimédia donnée, une liste de documents pertinents est retournée en combinant linéairement les résultats obtenus séparément sur chaque modalité. Le but de cet article est d’étudier l’impact, sur les résultats, du poids attribué à l’information visuelle par rapport à l’information textuelle. Des expérimentations, réalisées sur la collection multimédia ImageCLEF extraite de l’encyclopédie Wikipedia, montrent que les résultats peuvent être améliorés après une première étape d’apprentissage de ce poids.